On this page you can get a detailed analysis of a word or phrase, produced by the best artificial intelligence technology to date:
общая лексика
лексический анализатор
модуль транслятора, выполняющий лексический анализ исходного текста программы
Смотрите также
Смотрите также
общая лексика
лексический анализ
первый этап анализа компилятором исходного текста программы при его трансляции
синоним
Смотрите также
In computer science, lexical analysis, lexing or tokenization is the process of converting a sequence of characters (such as in a computer program or web page) into a sequence of lexical tokens (strings with an assigned and thus identified meaning). A program that performs lexical analysis may be termed a lexer, tokenizer, or scanner, although scanner is also a term for the first stage of a lexer. A lexer is generally combined with a parser, which together analyze the syntax of programming languages, web pages, and so forth.